RESUMO Este estudo tem o objetivo de apresentar a avaliação de um projeto de capacitação em serviço para profissionais de saúde nas ações de prevenção e controle da hanseníase, problematizando o modelo de avaliação adotado, com foco na utilização para a gestão em saúde. Foi realizada uma avaliação ex-post em 18 municípios prioritários brasileiros participantes das capacitações. Empregou-se a estratégia Rapid Evaluation Methods (REM), priorizando: a) abordagem colaborativa; b) técnicas qualitativas; e c) enfoque conceitual da translação do conhecimento. Foram realizadas 24 entrevistas grupais, envolvendo 278 participantes. A abordagem de ensino em serviço foi importante para revalorização das ações de prevenção e controle da hanseníase e para conferir um lugar privilegiado de discussão técnica, de reflexão e de mudanças na atenção primária e em sua relação com a especializada. Conclui-se que o modelo de avaliação possibilitou que as controvérsias e convergências surgissem, assim como as recomendações para ajustes da intervenção junto à gestão em tempo oportuno.

ABSTRACT This study aims to present the evaluation of an in-service training project for health professionals in leprosy prevention and control actions, questioning the adopted evaluation model, focusing on its use for health management. An ex-post evaluation was carried out in 18 priority Brazilian municipalities participating in the training project. Rapid Evaluation Methods (REM) strategy was employed, prioritizing: a) a collaborative approach; b) qualitative techniques; and c) a conceptual approach to knowledge translation. Twenty-four group interviews were carried out, involving 278 participants. The in-service teaching approach was important for revaluing leprosy prevention and control actions and to provide a privileged place for technical discussion, reflection and changes in primary health care and in its relationship with specialized care. It can be concluded that the evaluation model enabled controversies and convergences to emerge, as well as recommendations for managers to adjust the intervention timely.

ABSTRACT This study aims to present the evaluation of an in-service training project for health professionals in leprosy prevention and control actions, questioning the adopted evaluation model, focusing on its use for health management. An ex-post evaluation was carried out in 18 priority Brazilian municipalities participating in the training project. Rapid Evaluation Methods (REM) strategy was employed, prioritizing: a) a collaborative approach; b) qualitative techniques; and c) a conceptual approach to knowledge translation. Twenty-four group interviews were carried out, involving 278 participants. The in-service teaching approach was important for revaluing leprosy prevention and control actions and to provide a privileged place for technical discussion, reflection and changes in primary health care and in its relationship with specialized care. It can be concluded that the evaluation model enabled controversies and convergences to emerge, as well as recommendations for managers to adjust the intervention timely.

RESUMO Este estudo tem o objetivo de apresentar a avaliação de um projeto de capacitação em serviço para profissionais de saúde nas ações de prevenção e controle da hanseníase, problematizando o modelo de avaliação adotado, com foco na utilização para a gestão em saúde. Foi realizada uma avaliação ex-post em 18 municípios prioritários brasileiros participantes das capacitações. Empregou-se a estratégia Rapid Evaluation Methods (REM), priorizando: a) abordagem colaborativa; b) técnicas qualitativas; e c) enfoque conceitual da translação do conhecimento. Foram realizadas 24 entrevistas grupais, envolvendo 278 participantes. A abordagem de ensino em serviço foi importante para revalorização das ações de prevenção e controle da hanseníase e para conferir um lugar privilegiado de discussão técnica, de reflexão e de mudanças na atenção primária e em sua relação com a especializada. Conclui-se que o modelo de avaliação possibilitou que as controvérsias e convergências surgissem, assim como as recomendações para ajustes da intervenção junto à gestão em tempo oportuno.

Resumo As ferramentas de gestão de dados, denominadas Business Intelligence (BI), podem ser importantes para fornecer informações completas e personalizáveis para as demandas da gestão em saúde. O objetivo é apresentar a avaliação da aplicabilidade e potencialidade do uso de uma ferramenta de BI no planejamento das ações de gestão da Atenção Primária em Saúde. Estudo exploratório, de abordagem quantitativa, tendo as dimensões de eficiência e otimização como atributos da qualidade. Seleção de uma Clínica da Família, da cidade do Rio de Janeiro, sendo inseridos no BI dados do território, do cadastro do Programa Bolsa Família e de linhas de cuidado, para explorar as possibilidades de combinação e de geração de indicadores. Neste artigo, apresentamos a Ficha A e a Linha de cuidado da gestante. Como resultados a ampliação de indicadores detalhados em relação à um tabulador comum e otimização na obtenção de listas e do monitoramento por parte das equipes e do gestor. Quanto à eficiência, seu baixo custo e fácil manuseio reduz custos de criação e de profissionais necessários. Conclui-se que a ferramenta viabiliza uma maior organização e planejamento, facilitando a gestão da Clínica da Família, sobretudo no monitoramento dos indicadores e processos avaliativos.

Abstract Data management tools, called Business Intelligence (BI), can be important to provide complete and customizable information for the demands of health management. The objective of the article is to present the evaluation of the applicability and potential of a BI tool in the planning of management actions of Primary Health Care. Exploratory study, with a quantitative approach, using the dimensions of efficiency and optimization as attributes of quality. A Family Clinic was selected in the city of Rio de Janeiro. Data from the territory, from the Bolsa Família Program register and some “Care Lines” were inserted in the BI, in order to explore the possibilities of combining and generating indicators. In this article, we present the use of Form A and the pregnant woman’s Care Line. As a result, greater range of detailed indicators compared to a common tab, and optimization in obtaining lists and perform monitoring tasks by the teams and the manager. Regarding efficiency, its low cost and easy handling reduces the costs of creation and necessary professionals. As a conclusion, the BI tool enables greater organization and planning, facilitating the Family Health Clinic management, mainly for the monitoring of indicators and evaluation processes.

Resumo As ferramentas de gestão de dados, denominadas Business Intelligence (BI), podem ser importantes para fornecer informações completas e personalizáveis para as demandas da gestão em saúde. O objetivo é apresentar a avaliação da aplicabilidade e potencialidade do uso de uma ferramenta de BI no planejamento das ações de gestão da Atenção Primária em Saúde. Estudo exploratório, de abordagem quantitativa, tendo as dimensões de eficiência e otimização como atributos da qualidade. Seleção de uma Clínica da Família, da cidade do Rio de Janeiro, sendo inseridos no BI dados do território, do cadastro do Programa Bolsa Família e de linhas de cuidado, para explorar as possibilidades de combinação e de geração de indicadores. Neste artigo, apresentamos a Ficha A e a Linha de cuidado da gestante. Como resultados a ampliação de indicadores detalhados em relação à um tabulador comum e otimização na obtenção de listas e do monitoramento por parte das equipes e do gestor. Quanto à eficiência, seu baixo custo e fácil manuseio reduz custos de criação e de profissionais necessários. Conclui-se que a ferramenta viabiliza uma maior organização e planejamento, facilitando a gestão da Clínica da Família, sobretudo no monitoramento dos indicadores e processos avaliativos.

Abstract Data management tools, called Business Intelligence (BI), can be important to provide complete and customizable information for the demands of health management. The objective of the article is to present the evaluation of the applicability and potential of a BI tool in the planning of management actions of Primary Health Care. Exploratory study, with a quantitative approach, using the dimensions of efficiency and optimization as attributes of quality. A Family Clinic was selected in the city of Rio de Janeiro. Data from the territory, from the Bolsa Família Program register and some “Care Lines” were inserted in the BI, in order to explore the possibilities of combining and generating indicators. In this article, we present the use of Form A and the pregnant woman’s Care Line. As a result, greater range of detailed indicators compared to a common tab, and optimization in obtaining lists and perform monitoring tasks by the teams and the manager. Regarding efficiency, its low cost and easy handling reduces the costs of creation and necessary professionals. As a conclusion, the BI tool enables greater organization and planning, facilitating the Family Health Clinic management, mainly for the monitoring of indicators and evaluation processes.

RESUMO A incorporação dos diferentes interessados ao processo avaliativo é estratégica para facilitar a compreensão da avaliação e a apropriação de seus resultados. Este artigo se propõe a descrever e analisar criticamente a participação dos atores (stakeholders) no processo de avaliação, utilizando a pesquisa avaliativa do Projeto de Formação e Melhoria da Qualidade de Rede de Atenção à Saúde (Projeto QualiSUS-Rede). Para isto, foram tomadas como base as memórias das reuniões de trabalho, das oficinas de alinhamento conceitual e de validação dos Modelos Lógicos dos seminários realizados, assim como dos relatórios elaborados no período de agosto de 2012 a dezembro de 2015. A abordagem colaborativa envolveu inúmeros desafios, englobando 15 projetos, com distintos níveis de abrangência e complexidade, e com diversos stakeholders, com diferentes tipos e níveis de colaboração, o que condicionou os limites e as possibilidades de participação. Esta experiência gerou a adaptação do Modelo de Avaliação Colaborativa de Rodriguez-Campos e Rincones-Gomez (2013). A abordagem colaborativa exige por parte dos avaliadores um exercício de flexibilização e de ajuste às distintas particularidades e aos contextos locais, sem perder de vista o alinhamento às teorias da intervenção e ao modelo teórico da avaliação.

ABSTRACT Stakeholder approaches to evaluation imply the incorporation of different stakeholders in the evaluation process as to facilitate its comprehension and the appropriation of its results. This article aims to describe and critically analyze the participation of the stakeholders in the evaluation process taking into account the evaluation study Projeto de Formação e Melhoria da Qualidade de Rede de Atenção à Saúde (Projeto QualiSUS-Rede). For this purpose, we analyzed the reports regarding work meetings, workshops for conceptual alignment and validation of the projects Logical Models, seminars, as well as partial and final reports, during the period of August 2012 to December 2015. The collaborative approach involved numerous challenges encompassing 15 projects, with different levels of complexity, and with a diverse number and variety of stakeholders, which brought us to the limits and possibilities of participation of the different actors. We adapted the Collaborative Evaluation Model, from Rodriguez-Campos and Rincones-Gomez (2013). This type of approach requires the evaluators to exercise flexibility and adjustment to different local contexts and particularities, without losing sight of conformity to the theory of intervention and to the evaluation theoretical model.

RESUMO A incorporação dos diferentes interessados ao processo avaliativo é estratégica para facilitar a compreensão da avaliação e a apropriação de seus resultados. Este artigo se propõe a descrever e analisar criticamente a participação dos atores (stakeholders) no processo de avaliação, utilizando a pesquisa avaliativa do Projeto de Formação e Melhoria da Qualidade de Rede de Atenção à Saúde (Projeto QualiSUS-Rede). Para isto, foram tomadas como base as memórias das reuniões de trabalho, das oficinas de alinhamento conceitual e de validação dos Modelos Lógicos dos seminários realizados, assim como dos relatórios elaborados no período de agosto de 2012 a dezembro de 2015. A abordagem colaborativa envolveu inúmeros desafios, englobando 15 projetos, com distintos níveis de abrangência e complexidade, e com diversos stakeholders, com diferentes tipos e níveis de colaboração, o que condicionou os limites e as possibilidades de participação. Esta experiência gerou a adaptação do Modelo de Avaliação Colaborativa de Rodriguez-Campos e Rincones-Gomez (2013). A abordagem colaborativa exige por parte dos avaliadores um exercício de flexibilização e de ajuste às distintas particularidades e aos contextos locais, sem perder de vista o alinhamento às teorias da intervenção e ao modelo teórico da avaliação.

ABSTRACT Stakeholder approaches to evaluation imply the incorporation of different stakeholders in the evaluation process as to facilitate its comprehension and the appropriation of its results. This article aims to describe and critically analyze the participation of the stakeholders in the evaluation process taking into account the evaluation study Projeto de Formação e Melhoria da Qualidade de Rede de Atenção à Saúde (Projeto QualiSUS-Rede). For this purpose, we analyzed the reports regarding work meetings, workshops for conceptual alignment and validation of the projects Logical Models, seminars, as well as partial and final reports, during the period of August 2012 to December 2015. The collaborative approach involved numerous challenges encompassing 15 projects, with different levels of complexity, and with a diverse number and variety of stakeholders, which brought us to the limits and possibilities of participation of the different actors. We adapted the Collaborative Evaluation Model, from Rodriguez-Campos and Rincones-Gomez (2013). This type of approach requires the evaluators to exercise flexibility and adjustment to different local contexts and particularities, without losing sight of conformity to the theory of intervention and to the evaluation theoretical model.

RESUMO Trata-se de relato de experiência sobre a disciplina Introdução à Avaliação em Saúde para graduandos de saúde coletiva sob as perspectivas docente e discente. A experiência docente considerou o exercício pedagógico, quando se deu a aquisição de competências - saber, saber fazer e ser em interação -, analisado por critérios e parâmetros pactuados. A experiência discente foi obtida por meio do instrumento de avaliação aplicado aos discentes, incluindo os itens: apreciação geral, conteúdo programático, expectativas, mesa redonda, seminário, pontos positivos e problemas. Os achados revelam as dificuldades de integração com outras disciplinas e os aspectos participativos da abordagem por problematização.

ABSTRACT This paper presents an experience report on the discipline Introduction to Health Evaluation for undergraduate students also as under the teacher as the student perspectives. The teaching perspective considered the students' response to a simulation exercise whose outcome success was the acquisition of competencies (knowledge, know-how and be in interaction), being analyzed by criteria and agreed parameters. The students' experience was captured by questionnaire, including: general assessment, curriculum, expectations, round table, seminars, strengths and problems. The findings reveal integration difficulties with other disciplines and participatory aspects of this questioning approach.

RESUMO Este artigo reflete sobre o apoiador institucional do Ministério da Saúde a partir da avaliação de implementação do Projeto QualiSUS-Rede. Utiliza-se o referencial de atores intermediários, inspirado na Teoria Ator-Rede, adaptada ao objeto do estudo. Entrevistaram-se treze apoiadores, explorando-se as operações de translação e os domínios de mediação cognitivos, estratégicos e logísticos. Os resultados indicam a legitimação da função apoio como unidade organizacional, embora com pouca autonomia gerencial e financeira, diluindo a possibilidade desses atores de produzir e gerenciar conexões inovadoras para a construção de alianças, encaminhamentos e superação de conflitos e controvérsias.

ABSTRACT This paper reflects on the Ministry of Health 'institutional supporter', based on the implementation evaluation of QualiSUS-Network Project. We employed the intermediate actors theory, inspired by the Actor-Network Theory, and adapted to the study's object. Thirteen 'supporters' were interviewed to explore the relationship between the translation operations and mediation process (cognitive, strategic and logistic). The results indicate the 'supporter' as an organizational unit with a legitimate function, but with limited managerial and financial autonomy, which dilutes these actors possibility to produce and manage innovative connections to build alliances and overcome conflicts and controversies.

RESUMO Trata-se de relato de experiência sobre a disciplina Introdução à Avaliação em Saúde para graduandos de saúde coletiva sob as perspectivas docente e discente. A experiência docente considerou o exercício pedagógico, quando se deu a aquisição de competências - saber, saber fazer e ser em interação -, analisado por critérios e parâmetros pactuados. A experiência discente foi obtida por meio do instrumento de avaliação aplicado aos discentes, incluindo os itens: apreciação geral, conteúdo programático, expectativas, mesa redonda, seminário, pontos positivos e problemas. Os achados revelam as dificuldades de integração com outras disciplinas e os aspectos participativos da abordagem por problematização.

ABSTRACT This paper presents an experience report on the discipline Introduction to Health Evaluation for undergraduate students also as under the teacher as the student perspectives. The teaching perspective considered the students' response to a simulation exercise whose outcome success was the acquisition of competencies (knowledge, know-how and be in interaction), being analyzed by criteria and agreed parameters. The students' experience was captured by questionnaire, including: general assessment, curriculum, expectations, round table, seminars, strengths and problems. The findings reveal integration difficulties with other disciplines and participatory aspects of this questioning approach.

RESUMO Este artigo reflete sobre o apoiador institucional do Ministério da Saúde a partir da avaliação de implementação do Projeto QualiSUS-Rede. Utiliza-se o referencial de atores intermediários, inspirado na Teoria Ator-Rede, adaptada ao objeto do estudo. Entrevistaram-se treze apoiadores, explorando-se as operações de translação e os domínios de mediação cognitivos, estratégicos e logísticos. Os resultados indicam a legitimação da função apoio como unidade organizacional, embora com pouca autonomia gerencial e financeira, diluindo a possibilidade desses atores de produzir e gerenciar conexões inovadoras para a construção de alianças, encaminhamentos e superação de conflitos e controvérsias.

ABSTRACT This paper reflects on the Ministry of Health 'institutional supporter', based on the implementation evaluation of QualiSUS-Network Project. We employed the intermediate actors theory, inspired by the Actor-Network Theory, and adapted to the study's object. Thirteen 'supporters' were interviewed to explore the relationship between the translation operations and mediation process (cognitive, strategic and logistic). The results indicate the 'supporter' as an organizational unit with a legitimate function, but with limited managerial and financial autonomy, which dilutes these actors possibility to produce and manage innovative connections to build alliances and overcome conflicts and controversies.

O objetivo deste artigo é o de analisar os níveis de ambiguidade e conflito em relação aos objetivos e recursos (meios) necessários à implementação da Assistência Farmacêutica no município de João Pessoa (PB). Os dados foram coletados por meio de entrevistas semiestruturadas e sistematizados por meio de análise de conteúdo. Para análise dos resultados, utilizou-se como ferramenta o modelo de ambiguidade-conflito de Richard Matland. Os resultados indicam baixos níveis de ambiguidade sobre os objetivos da política, porém considerável nível de conflito em relação aos meios. Os achados permitiram detectar características de 'Implementação Administrativa', com atributos da tipologia 'Política'.

This paper aims to analyze the levels of ambiguity and conflict related to objectives and resources (means) required for the implementation of Pharmaceutical Services in the city of João Pessoa-PB, Brazil. Data were collected by means of semi-structured interviews and systematized as for content analysis. Data analysis followed the ambiguity-conflict model of Richard Matland. A low ambiguity level was found regarding pharmaceutical policy objectives, but showing a considerable level of conflict in relation to the means. The findings contained some characteristics of 'administrative implementation' and attributes of 'Politics' type.

O objetivo deste artigo é o de analisar os níveis de ambiguidade e conflito em relação aos objetivos e recursos (meios) necessários à implementação da Assistência Farmacêutica no município de João Pessoa (PB). Os dados foram coletados por meio de entrevistas semiestruturadas e sistematizados por meio de análise de conteúdo. Para análise dos resultados, utilizou-se como ferramenta o modelo de ambiguidade-conflito de Richard Matland. Os resultados indicam baixos níveis de ambiguidade sobre os objetivos da política, porém considerável nível de conflito em relação aos meios. Os achados permitiram detectar características de 'Implementação Administrativa', com atributos da tipologia 'Política'.

This paper aims to analyze the levels of ambiguity and conflict related to objectives and resources (means) required for the implementation of Pharmaceutical Services in the city of João Pessoa-PB, Brazil. Data were collected by means of semi-structured interviews and systematized as for content analysis. Data analysis followed the ambiguity-conflict model of Richard Matland. A low ambiguity level was found regarding pharmaceutical policy objectives, but showing a considerable level of conflict in relation to the means. The findings contained some characteristics of 'administrative implementation' and attributes of 'Politics' type.

No contexto da gestão pública contemporânea, este estudo teve por objetivo verificar o desempenho de distintos aspectos da assistência farmacêutica em municípios da Paraíba. Trata-se de uma pesquisa descritiva, realizada a partir de relatórios de fiscalização dos municípios (no período de 2003 a 2010), produzidos pela Controladoria-Geral da União (CGU). O estudo apontou que 98,1% dos municípios apresentaram pelo menos um problema na gestão de recursos e/ou de serviços farmacêuticos; que em 52,7% o controle de estoque não existia ou era deficiente; que em 52,7% não foram observadas as normas de aquisição de medicamentos; que em 38,2% foram constatados desvios de recursos e fraudes do programa; e que em 27,3% dos municípios faltavam medicamentos básicos. Conclui-se que houve importantes problemas de gestão que afetaram processos e a qualidade da prestação dos serviços aos cidadãos.

In the context of contemporary public management, this study aimed to check the performance of various aspects of pharmaceutical service in towns of Paraíba, Brazil. This is a descriptive research, conducted by means of inspection reports from the towns (within the period from 2003 to 2010), produced by the Office of the Inspector General of the Union (CGU). The study has found that 98.1% of the towns had at least one problem in the management of resources and/or pharmaceutical services; that in 52.7% stock control did not exist or it was deficient; that in 52.7% the rules for acquiring medicines were not observed; that in 38.2% misappropriation of resources and fraud concerning the program were found; and that in 27.3% of towns there was lack of basic medicines. It was concluded that there were important management problems that affected processes and the quality of services provided to citizens.

En el contexto de la gestión pública contemporánea este trabajo tuve como objetivo verificar el disempeño de diferentes aspectos de los servicios farmacéuticos en municipalidades del estado de Paraíba. Tratase de un estudio descriptivo, a partir de los informes de inspección en las municipalidades (de 2003 a 2010), producidos por la Controladoria Geral da União (CGU). Si encontró que 98.1% de las municipalidades tienen al menos un problema en la gestión de recursos y/o servicios farmacéuticos; que en 52.7% el control de inventario no existía o era deficiente así como no fueron observadas la aplicación de las reglas de adquisición de medicamentos; que en 38.2% se encontraron desvío de recursos y fraude; y que en 27.3% de las municipalidades hay falta de medicamentos básicos. Si concluyó que había problemas de gestión que afectan a importantes procesos así como a la calidad de la prestación de servicios a los ciudadanos.